|
|
Automated Identification of Graphical UI Elements for Robotic Quality Assurance
Válek, Lukáš ; Herout, Adam (referee) ; Španěl, Michal (advisor)
Tato práce se zabývá problematikou analýzy obrazovek grafického uživatelského rozhraní (GUI) pomocí konvolučních neuronových sítí (CNN) a metod počítačového vidění. Cílem této práce je vytvořit systém, který automaticky identifikuje GUI elementy na základě piktogramových a textových informací pro detekované prvky ve vstupním obrázku. K~vývoji systému byla použita kombinace EfficientNetB1 CNN, OCR a tradičních metod počítačového vidění. K trénování CNN byla použita vlastní datová sada, která obsahovala 120 tisíc piktogramů. Byl vytvořen sémantický slovník UI prvků, který dále využívá text detekovaný pomocí OCR. Nakonec byl vytvořen podsystém pro analýzu GUI hierarchie, který slouží k detekci a sémantické kategorizaci oblastí GUI. Výsledný systém automaticky klasifikuje detekované piktogramy, navrhuje další třídy na základě textu a rozděluje GUI obrazovku do hierarchických sekcí. Systém dosahuje 81,1% přesnosti identifikace UI prvků a v průměru zanalyzuje jednu obrazovku za 0,6 sekundy. Systém automatizuje identifikaci UI prvků, čímž umožňuje zaměstnancům věnovat se jiným činnostem. V budoucnu lze tento systém dále rozvíjet, aby sloužil jako základ pro automatické exploratorní testování.
|
|
|
Robotic selection of 2D objects from a container
Velen, Bohumil ; Parák, Roman (referee) ; Matoušek, Radomil (advisor)
In this thesis, a specific problem of production automation is addressed. Specifically, in this case, it concerns the selection of 2D products from a container by a robot. The thesis briefly presents both the wide range of options that are offered on the market in this regard, and the specific build and programming of a robot that can identify the part, grasp it and manipulate it to get it into the desired position. In this paper, the results of the identification and manipulation of several 2D parts are presented and documented. These experiments have demonstrated the effectiveness of the solution and the practical performance of the machine vision system and the ABB YuMi collaborative robot that was used. This also showed the way to solve similar manipulation tasks in other possible industrial applications.
|
|
|
Sledování včel na vstupu včelího úlu
NOVOTNÝ, Petr
The main goal of this work is to design and put into operation a camera system for an intelligent beehive located at the Experimental and Educational Apiary of the Biological Center of the ASCR, v. VI in the area of the Dendrological Garden on Branišovská Street No. 31 in Č. Budějovice and to create software for monitoring, counting and space identification of bees at the entrance of a beehive.The system will consist of cameras connected to the Raspberry Pi where it will be processed using the image processing method. The obtained data will be processed on the server and stored in the database. Part of the obtained results will be displayed using Grafana's visualization tools.
|
|
|
Automated Identification of Graphical UI Elements for Robotic Quality Assurance
Válek, Lukáš ; Herout, Adam (referee) ; Španěl, Michal (advisor)
Tato práce se zabývá problematikou analýzy obrazovek grafického uživatelského rozhraní (GUI) pomocí konvolučních neuronových sítí (CNN) a metod počítačového vidění. Cílem této práce je vytvořit systém, který automaticky identifikuje GUI elementy na základě piktogramových a textových informací pro detekované prvky ve vstupním obrázku. K~vývoji systému byla použita kombinace EfficientNetB1 CNN, OCR a tradičních metod počítačového vidění. K trénování CNN byla použita vlastní datová sada, která obsahovala 120 tisíc piktogramů. Byl vytvořen sémantický slovník UI prvků, který dále využívá text detekovaný pomocí OCR. Nakonec byl vytvořen podsystém pro analýzu GUI hierarchie, který slouží k detekci a sémantické kategorizaci oblastí GUI. Výsledný systém automaticky klasifikuje detekované piktogramy, navrhuje další třídy na základě textu a rozděluje GUI obrazovku do hierarchických sekcí. Systém dosahuje 81,1% přesnosti identifikace UI prvků a v průměru zanalyzuje jednu obrazovku za 0,6 sekundy. Systém automatizuje identifikaci UI prvků, čímž umožňuje zaměstnancům věnovat se jiným činnostem. V budoucnu lze tento systém dále rozvíjet, aby sloužil jako základ pro automatické exploratorní testování.
|
|
|
Identifikace objektů v obraze se zaměřením na aplikace v dopravě
HEJPLÍK, Daniel
This bachelor´s thesis has two parts, theoretical and practical. Theoretical part focuses on research and comparsion of algorithms and principles used for object recognition in digital images. The result is evaluation of their suitability for usage in traffic. Main evaluation criterion is speed of individual methods and reliability of object identification. Practical part focuses on creating specific software tool in Java language, based on object recognition using known algorithms, primarily library OpenCV. The program will include its own graphical interface. Part of result will be documentation for administrators and end users.
|
guest ::
